eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0324    recall@10 : 0.0563    recall@20 : 0.0908    recall@50 : 0.1583    mrr@5 : (0.0594+0j)    mrr@10 : (0.0678+0j)    mrr@20 : (0.0729+0j)    mrr@50 : (0.0767+0j)    ndcg@5 : (0.0375+0j)    ndcg@10 : (0.0438+0j)    ndcg@20 : (0.0526+0j)    ndcg@50 : (0.0698+0j)    hit@5 : 0.1116    hit@10 : 0.1793    hit@20 : 0.2575    hit@50 : 0.3796    precision@5 : 0.0253    precision@10 : 0.0224    precision@20 : 0.018    precision@50 : 0.0132
Test result:
recall@5 : 0.0304    recall@10 : 0.0499    recall@20 : 0.0749    recall@50 : 0.1395    mrr@5 : (0.0547+0j)    mrr@10 : (0.0619+0j)    mrr@20 : (0.0667+0j)    mrr@50 : (0.0709+0j)    ndcg@5 : (0.0331+0j)    ndcg@10 : (0.0378+0j)    ndcg@20 : (0.0448+0j)    ndcg@50 : (0.062+0j)    hit@5 : 0.1072    hit@10 : 0.1608    hit@20 : 0.232    hit@50 : 0.3629    precision@5 : 0.0243    precision@10 : 0.0206    precision@20 : 0.0169    precision@50 : 0.0132

eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0255    recall@10 : 0.0442    recall@20 : 0.0664    recall@50 : 0.1286    mrr@5 : (0.0539+0j)    mrr@10 : (0.0615+0j)    mrr@20 : (0.0651+0j)    mrr@50 : (0.0693+0j)    ndcg@5 : (0.0316+0j)    ndcg@10 : (0.0364+0j)    ndcg@20 : (0.0419+0j)    ndcg@50 : (0.0581+0j)    hit@5 : 0.1037    hit@10 : 0.1634    hit@20 : 0.217    hit@50 : 0.3436    precision@5 : 0.0236    precision@10 : 0.0207    precision@20 : 0.0155    precision@50 : 0.0118
Test result:
recall@5 : 0.0255    recall@10 : 0.0431    recall@20 : 0.0705    recall@50 : 0.1295    mrr@5 : (0.0559+0j)    mrr@10 : (0.0619+0j)    mrr@20 : (0.0666+0j)    mrr@50 : (0.0705+0j)    ndcg@5 : (0.032+0j)    ndcg@10 : (0.0354+0j)    ndcg@20 : (0.0426+0j)    ndcg@50 : (0.0584+0j)    hit@5 : 0.1019    hit@10 : 0.1494    hit@20 : 0.2188    hit@50 : 0.3409    precision@5 : 0.023    precision@10 : 0.0192    precision@20 : 0.0163    precision@50 : 0.0127

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0313    recall@10 : 0.0525    recall@20 : 0.0829    recall@50 : 0.148    mrr@5 : (0.0545+0j)    mrr@10 : (0.0612+0j)    mrr@20 : (0.0671+0j)    mrr@50 : (0.0711+0j)    ndcg@5 : (0.0346+0j)    ndcg@10 : (0.0399+0j)    ndcg@20 : (0.0482+0j)    ndcg@50 : (0.0651+0j)    hit@5 : 0.109    hit@10 : 0.1608    hit@20 : 0.2478    hit@50 : 0.3699    precision@5 : 0.0248    precision@10 : 0.0205    precision@20 : 0.0169    precision@50 : 0.0127
Test result:
recall@5 : 0.0249    recall@10 : 0.0438    recall@20 : 0.0705    recall@50 : 0.1328    mrr@5 : (0.0587+0j)    mrr@10 : (0.0649+0j)    mrr@20 : (0.0701+0j)    mrr@50 : (0.0738+0j)    ndcg@5 : (0.033+0j)    ndcg@10 : (0.037+0j)    ndcg@20 : (0.0441+0j)    ndcg@50 : (0.06+0j)    hit@5 : 0.1072    hit@10 : 0.1547    hit@20 : 0.2293    hit@50 : 0.3453    precision@5 : 0.0239    precision@10 : 0.0204    precision@20 : 0.0171    precision@50 : 0.0128

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0182    recall@10 : 0.0379    recall@20 : 0.0588    recall@50 : 0.1093    mrr@5 : (0.0364+0j)    mrr@10 : (0.0436+0j)    mrr@20 : (0.0477+0j)    mrr@50 : (0.0513+0j)    ndcg@5 : (0.0207+0j)    ndcg@10 : (0.0267+0j)    ndcg@20 : (0.033+0j)    ndcg@50 : (0.0462+0j)    hit@5 : 0.0756    hit@10 : 0.1318    hit@20 : 0.1924    hit@50 : 0.3032    precision@5 : 0.0167    precision@10 : 0.0161    precision@20 : 0.0137    precision@50 : 0.0103
Test result:
recall@5 : 0.02    recall@10 : 0.0363    recall@20 : 0.0612    recall@50 : 0.118    mrr@5 : (0.0491+0j)    mrr@10 : (0.0561+0j)    mrr@20 : (0.0602+0j)    mrr@50 : (0.0637+0j)    ndcg@5 : (0.0272+0j)    ndcg@10 : (0.0308+0j)    ndcg@20 : (0.0365+0j)    ndcg@50 : (0.0509+0j)    hit@5 : 0.0879    hit@10 : 0.1397    hit@20 : 0.1995    hit@50 : 0.3172    precision@5 : 0.0206    precision@10 : 0.0184    precision@20 : 0.0149    precision@50 : 0.0115

